Яндекс Браузер научился генерировать субтитры для русскоязычных видео и трансляций с помощью встроенной нейросети. Новая функция работает на любых сайтах: от видеохостингов и социальных сетей до страниц телеканалов и роликов в облачных хранилищах. Субтитры пригодятся, когда нужно соблюдать тишину, а наушников под рукой нет, или когда в помещении слишком шумно. Также они позволят комфортно просматривать видео людям с нарушениями слуха.
Для генерации субтитров просто откройте нужную страницу в Яндекс Браузере и наведите курсор на видеоплеер с роликом. В его верхней части появятся две кнопки. Одна включает и отключает процесс создания субтитров, а вторая позволяет настроить их вид — изменить размер текста и его прозрачность.
Яндекс Браузер генерирует субтитры с помощью встроенной прямо в него нейросети. Мы разработали её на основе модели для распознавания речи в Яндекс Станции и серьёзно оптимизировали технологию.
Уменьшив потребление оперативной памяти сначала до 800, а затем до 150 мегабайт мы создали решение, которое можно запускать в Браузере на обычном компьютере. Генерация работает даже на устаревших ПК с невысокой вычислительной мощностью. Если вам захочется узнать подробности о том, как именно устроена технология, рекомендуем заглянуть в нашу новую статью на Хабре.
Нейросеть для генерации субтитров встроена в Яндекс Браузер для компьютеров и работает на Windows и Linux. В macOS поддержка функции появится до конца сентября. В будущем мы хотим добавить поддержку других языков и реализовать технологию на мобильных устройствах.
По данным нашего исследования, до 40% пользователей регулярно включают субтитры просто потому, что так удобнее смотреть видео. Расскажите в комментариях о том, как вы смотрите ролики, и поделитесь впечатлениями о новой функции Яндекс Браузера — насколько она полезна лично для вас?